[Güncel 2021] Blogger Robots.txt Dosyası Oluşturma ve Kaydetme

ilk
[Güncel 2021] Blogger Robots.txt Dosyası Oluşturma ve Kaydetme

Blogger ve Wix gibi bir site barında hizmeti kullanıyorsanız robot.txt dosyanızı direkt olarak  düzenlemeniz gerekmeyebilir veya mümkün olmayabilir. Sayfalarınızdan birini arama motorlarından gizlemek veya arama motorlarına görünür hale getirmek için sitenizin barındırma hizmetinde sayfanızın arama motorlarındaki görünürlüğünü değiştirme ile ilgili talimatları arayın.

Robots.txt dosyası kullanarak sitenizdeki hangi dosyaların tarayıcıların erişimine açık olacağını belirleyebilirsiniz. Robots.txt dosyası, sitenizin kök dizininde bulunur. Dolayısıyla robots.txt dosyası, www.example.com sitesinde www.example.com/robots.txt adresindedir. 

Robots.txt dosyanızda aksini belirtmediğiniz sürece, tüm dosyaların taranmasına izin verilir.

İki kural içeren basit bir robots.txt dosyası nasıl blogger platformuna entegre edilir adım adım gösterelim.

Adımlar

  1. Blogger blogunuza gidin. 
  2. Ayarlar >> Arama Tercihleri'ne gidin ›› Tarayıcılar ve indeksleme ›› Özel robots.txt ›› Düzenle'ye tıklayın. 
  3. Şimdi aşağıdaki robots.txt kodunu özel robot.txt kutusuna yapıştırın. 

https://hucreselveri.blogspot.com/ adresini kendi blog adresiniz yazacak şekilde değiştirmeyi unutmayın.

User-agent: Googlebot
Disallow: /nogooglebot/

User-agent: *
Allow: /

Sitemap: https://hucreselveri.blogspot.com/sitemap.xml
4. Değişiklikleri Kaydet düğmesine tıklayın. 

Böylelikle özel robot.txt dosyasını blogger'a eklemiş oluyoruz.

Bu örnekteki robots.txt dosyasında şunlar belirtilmiştir: 
Googlebot adlı kullanıcı aracısının, http://example.com/nogooglebot/ ile başlayan hiçbir URL'yi taramasına izin verilmez. Diğer tüm kullanıcı aracılarının sitenin tamamını taramasına izin verilir. 

Varsayılan davranış, kullanıcı aracılarının sitenin tamamını taramasına izin verilmesi olduğundan bu durum belirtilmese dahi sonuç aynı olacaktır. Sitenin site haritası dosyası, http://www.example.com/sitemap.xml adresinde bulunmaktadır.